Cours 3: Rappels de probability 


A- Notions de base 
B- Variables aleatoires 
C- Lois classiques 
D-Convergence de v.a. 


A- Notions de base 


Theorie des probability 

S Decrit le comportement de phenomenes dont le resultat est soumis au 
hasard 

S permet de modeliser la frequence de realisation d’« evenements » 
aleatoires. 


A.i Notions de base 


S Experience aleatoire \£]: 
experience dont le resultat ne 
peut pas etre determine avec 
certitude a priori. 

S Univers de E = ensemble des 
resultats possibles de 8 . On le 
note \Q\ 


S Resultat elementaire de 8 = 

resultat possible de 8. C’est un 
element de Q . On le note 


quelques definitions 


Ext : S : “ lancer d’un de regulier “ 

Q={i,2,3,4,5,6}=[|i, 6|], 
co =2 est un resultat possible 

Ex 2 : S : “jet de deux pieces de 
monnaie distinguables 

Q={(P,P) ; (P,F) ; (F,P) ; (F,F)}. 
co= (P,P) est un resultat possible 

Ex3 : 8 : “ lancer d’un crayon sur une 

feuille de papier de dim 1* L. Chaque 
point de la feuille est repere par son 
abscisse et son ordonnee. 

£2=={(x,y),xe [o,l], y e [o,L]} 
infini 

co= (1/ 2 ,L/ 2 ) 


A. 2 Notions de base: evenements 


S Ensemble V(£l) des parties de 

Q : ensemble constitue de tous les 
sous-ensembles (parties) de Q 

S Evenement (aleatoire) 

=une partie (sous-ensemble) de £1 
= assertion, qui peut ou non se 
realiser suivant Tissue de S. 

S Realisation d’un evenement : 

Soit A un evenement de Q. Soit co le 
resultat de l’experience 

|T se realise <=^> a>e A 

CP : A=Q se realise toujours. On 
l’appelle evenement certain. 

A=0 ne se realise jamais. On 
l’appelle evenement impossible. 

A={w} s’appelle evenement 
element aire. 


Exo :SiO = {a, b, c},7 :, (0)a8 
elements. 

l'ensemble vide : 0 

les parties a un elt. : { a },{b}, {c} 

les parties a deux elts. : {b,c},{a,c},{a,b} 

les parties a trois elements : {a,b, c}=£2 

Exi : A=« le lancer est pair >>={2,4,6}. 

Ex2 : A= « on obtient deux 
piles »={(P,P)} 

Si le resultat de S est co=(F,P) alors A ne 
se realise pas. 

EX3: A=« le lancer a une abscisse 
>1/2 »=]1/2,1 ]*[o,L] 


A. 2 Notions de base: evenements 

S Operations sur les evenements 


> Complementaire de A_: evenement constitue des resultats elementaires de 
ne sont pas dans A. Soit co le resultat de l’experience : 


A = {coe £1, cq£ A} 

( a se realise ssi A ne se realise pas : non A). 



£2 qui 

Q 


> Reunion_de A et B: evenement constitue des resultats elementaires de Q qui 
appartiennent aAouaB (ou aux deux). Soit co le resultat de l’experience : 


Au B = {a>e Q, coe A ou coe B} 



( AuB se realise ssi A se realise ou B se realise : A ou B). 


> Intersection de A et B: evenement constitue des resultats elementaires de £1 qui 
appartiennent a la fois a A et a B. Soit co le resultat de l’experience 


AnB = {coe Q, coe A et coe B} 



B 


(AnB se realise ssi A et B se realisent : A et B). 


A. 2 Notions de base: evenements 


> Relations particulieres : 


• Inclusion : A est inclus dans B ssi tout element de A appartient a B : 

Ac5 ^ (coe A => coe B) 

(Si A est realise alors B est realise). 

• Disjonction ou incompatibility A et B sont disjoints ssi A et B n’ont pas 
d’elements communs : 



A et B disjoints (AnB = 0) 



(A et B disjoints : A et B sont incompatibles). 


A. 2 Notions de base: evenements 


Systeme complet d’evenements : Soient \ , A 2 , ... , A n n 
evenements. On dit que (A 1 , A 2 , ... , A n) constitue un systeme 
complet d'evenements si ils forment une partition de O : 



Ex : (A, A) forme un systeme complet d’evenements. 


A. 2 Notions de base: evenements 


S Tribu d’evenements de O, espace probabilisable 

> Tribu d’un ensemble de parties de f 1 : Soit A e . A est une tribu ou sigma- 
algebre si elle contient O et est stable par complementation et reunion 
denombrable. On dit alors que (0,^4) est un espace probabilisable. 

Exemples : Tribu grossiere A={0, O } 

Tribu des parties (appelee aussi tribu discrete) A = V(£l) 

Tribu des boreliens *4={]a,+oc[, ae Q (ou R)}, lorsque £2=M 

Tribu des boreliens *4={]a,b[, a<b, (a,b)e I 2 }, lorsque 0=1 intervalle de R 

Autres exemples de tribus A ={ A, A, 0, O} 

0={a,b,c,d}, ^4={ 0,{a},{b,c,d},O} 

> Choix d’une tribu : se fait en fonction de l’information qu’on a sur le probleme. 
lorsque 1’univers est fini ou denombrable, on travaille generalement avec la tribu 
discrete. Lorsque l’univers est infini (0=R ou I) on travaille avec la tribu 
borelienne. 


A.3 Notions de base: probability 


Probability fonction permettant de « mesurer » la chance de realisation 
d’un evenement de V(Cl) (ou plus generalement dune tribu *4) 


S Definition : Soit (£2, *4) un espace probabilisable. Une probability sur 
(£2, A.) est une application p : A -» [0,1] satisfaisant les 3 axiomes 
suivants : 


0<P(A)<l,VAe A 
P(Q) = 1 

P(U A ) - X A )> V( A ) feN ensemble denombrable 

feN isN 

d'evenements disjoints 


Des lors que P est definie, (£2,A,P) s’appelle un espace probabilise. 


A.3 Notions de base: probability 




Operations sur les probab 


P(<t>) = 0 


P(A )= 1 

— P(A) 

P(A)*P(B)siAcB 

P(AUB) 

= P(A)+P(B)-P(AnB) 

P(UA') 

P{A,) 

0 <P(A f ) 

<1 


CP: Si P(A)=o alors A est presque impossible. On ecrit A — 0 p. s. 
Si P(A)=i alors A est presque sur. On ecrit A = £2 p.s. 


S Axiome des probabilites totales : (A.),, 
systeme complet d’evenements : 


V5e A, P(B) = Y j P(BnA i ) 



A.3 Notions de base: probability 


S Construction pratique d’une probabilite en univers fini ou 
denombrable 


On suppose que l'ensemble des evenements possibles est fini ou 
denombrable. On note Q = {oi l'ensemble des resultats 

possibles. 1 


> on definit la probabilite Pi de chaque resultat elementaire co. 
on a alors une suite (p lV ..,p n ) de nombres tels que : 0 < p. < 1 

n 

I Pi=l 
i = 1 1 


> la probabilite dun evenement quelconque A est donne par 


P(A)= Z P; 
cos.A 


A.3 Notions de base: probability 


> CP dun univers fini equiprobable : Lorsqu’il n’y a pas lieu d’attacher 
aux differents evenements elementaires des probabilites differentes, on 
a pour tout coi, ^ = p. On dit que l’univers est equiprobable. Lorsque 
l’univers est fini, de cardinal | Q | , on a ^ = p = 1 / 1 Cl \ .On definit alors la 
probability P comme precedemment : soit A un evenement quelconque. 


P(A) = 


LAI 

\a\ 


Cette probability est appelee probability uniforme sur Q. 


A.3 Notions de base: probability 


Ex 2 : S: “jet de deux pieces de monnaie distinguables £2={(P,P) ; (P,F) ; 
(F,P) ; (F,F)} est equiprobable. Soit A= “On obtient au moins une fois 
P ”={(P,P) ; (P,F) ; (F,P) }. P(A)= 3 /4 

Exibis : £: « jet d’un de pipe : le 6 apparait 2 fois plus que les autres ». W 
non equiprobable : pi=p2=p3=p=p5=p; p6=2p, p tel que :5p+2p=i, 
P=i/7 

A=« le lancer est pair »; P(A)=p2+p4+p6=4/7. 

Ex3 : £=« lancer de la mine de crayon ». Soit A un evenement (surface sur 
la feuille) de Q d’aire A. Si tous les emplacements sur la feuille ont la 
meme chance d’etre atteints, intuitivement, on peut definir P(A)=A/1*L 

Par contre, P({(x,y})=o (lorsque Q est infini, on admet que la 
probability de tomber sur un point particulier est nulle). 


A.4 Notions de base: probability 
conditionnelle, independance 


S Probabilite conditionnelle de A sachant B: 


P(A/B) = 


P(AnB) 

P(B) 


(probabilite que A se realise sachant que B se realise). C’est une 
probabilite sur B. 


S Independance de deux evenements A et B n ^) - P(A)P(B) 

P(A/B) = P(A ) 

Rq : Deux evenements disjoints ne sont pas independants. P(B/ A) = P(B) 


S Independance mutuelle d’une sequence d’evenements (A) 


VIeV(2,..n), P(p| 4 ) = El ) 

I I 


A.4 Notions de base: probability 
conditionnelle, independance 


S Theoreme de Bayes 


> pour deux evenements A et B: 


P(A/B) = 


P(B/ A)P(A) 

P(B) 


> Generalisation pour un systeme complet d’evenements A 1 ,A 2 , ... ,A n 


P(B)=J j P(B/A i )P(A i ) 


PjAJB )= 


B.i Variable aleatoire reelle (v.a.r): 
definition 


V Definition ; On suppose une experience dont l’univers est muni d’une tribu A 
d’evenements et d’une probability P ( (£2,.4,P) espace probabilise) . Une variable 
aleatoire reelle X est une caractere quantitatif, discret ou continu, dont la valeur 
est fonction du resultat de l’experience : 

£2 

X:Q^E 

0)^> X (co) = X 

(E est l’ensemble des valeurs possibles de X) 

qui est mesurable, c’est a dire telle que l’image reciproque X~ l (B) = {CO e Q, X (CO) e5) 
de tout element B de la tribu B associee a E est un evenement ae A. 

Rq : Notation : | — ^ 

\x-\B) = [XeB] 

Alors, on peut attribuer une chance de realisation a tout element B de B 

Rq : la mesurabilite de X depend des tribus A et B choisie sur O ex E. La tribu B 
est generalement E) en discret, la tribu borelienne en continu. 





B.i Variable aleatoire reelle (v.a.r): 
definition 


Rq : Lorsque X est une variable discrete, la sequence d’evenements [X =x] 
forme une partition de f 2 . On l’appelle partition engendree par X. 


Ext : lancer d’un de regulier. (O, P(O), P) est un espace probabilise. Soit X 
la fonction de Q. dans {0,1} valant 1 si le lancer est pair , o sinon. X est 
une fonction du resultat de l’experience et elle est mesurable. En effet, 

£={{o},{i},{o,i},0} 

On a {X=o}={i,3,5>e V(£l) 

• {X=i}={2,4,6}eP(Q) 

• {X e {o,i}}={X=o ou X=i}=fl e V{Cl) 

• {Xe0}=0eP(O) 


B.i Variable aleatoire reelle (v.a.r): 
definition 


Ex2 : On fait l’experience E : « on lance 2 pieces de monnaie regulieres ». 

Soit X le nombre de « P » obtenu : X prend les valeurs quantitatives 
discretes o, lou 2 (E={o,i, 2 }), selon le resultat de l’experience : 
w=(F,F) X(w)=o 
w=(F,P) ou w=(P,F) X(w)=i 
w=(P,P) X(w)=2 

X est done une variable aleatoire discrete. 

L’evenement engendre par la valeur o est revenement {X = 0} = {( J F,F)} 
L’evenement engendre par la valeur 1 est revenement { X = 1} = { (P, F), (. F,P ) } 
L’evenement engendre par la valeur 2 est revenement { X = 2} = { (P, P) } 

° na: {X=0}u{X=l}u{X=2} = n 


B.i Variable aleatoire reelle (v.a.r): 
definition 


Ex 3 : Soit X l’abscisse de la mine : X prend des valeurs 

quantitatives continues entre o et 1 (E=[o,l]), selon le resultat de 
l’experience : si le resultat de l’experience est co=(x,y) X(co)=x. 
On associe a E et a Q les tribus boreliennes A et B 
respectivement engendrees par les ouverts de [o,l] et de 
[o,l]*[o,L] (qui contiennent tous les intervalles associes a ces 
ensembles). Alors, l’image reciproque de tout element de B 
(tout intervalle I de [o,l] est dans A (c’est un intervalle de 
[o,l]*[o,L]) 

{X g I}={co=(x ? y) ? x g I ,y g [0,L]} g B 

X est done une variable aleatoire (continue). 


B.2 Variable aleatoire reelle (v.a.r): Loi 


S Loi d’une variable aleatoire : 

La mesurabilite de X assure que l'image reciproque de tout element 
Be B est dans A done possede une probability. On peut ainsi definir, 
sur (E, B) une mesure de probability, appelee loi de X et notee P x 

par 


VB £ JB, P x (B) = PjX 1 (B)) = P(X e B) 


B.2 Variable aleatoire reelle (v.a.r): Loi 


Variable aleatoire reelle discrete 

V Def : X prend ses valeur dans un 
ensemble E discret de valeurs 
reelles (v.a.r.d.). 


variable aleatoire reelle continue 

V Def : X prend ses valeur dans un 
ensemble E continu de valeurs 
reelles (v.a.r.c.). 


V Loi : Sequence des probability : 


p x (x) = P(X =x), xe E 


Proprietes : 


0 < 


P x (x) 


<1 


Ie P x(x) ~ ] 

VScB,p y (B)= S p Y (x) 
A xeB x 


S Loi: Vxe E, P(X =x) = 0 
Par contre P(Xe[x,x + dx[) * 0 
La loi de X est definie via la fonction 
f de R dans R, appele densite de 

probabiHte : \f {x)dx = p { Xe[x,x + dtfh 


Proprietes : 


o < f(x) 

J f(x)dx = 1 

R 

VBcltl,p x (B) = Sf(x)dx 


B.2 Variable aleatoire reelle (v.a.r): Loi 


V Presentation : la loi de X est 

presentee dans un tableau (tableau 
de la loi de X ou tableau en 
frequences): 


JCi 

0 

I 

2 

Pi 

1/4 

1/2 

1/4 


V Representation graphique : 
diagramme en batons 


V Presentation : La loi de X est 
donnee par la fonction f 


V Representation graphique : courbe 
de la densite 


densite de N(O.I) 



B.2 Variable aleatoire reelle (v.a.r): Loi 


S Fonction de repartition de la loi de X 

Definition: F:R^[ 0,1] 

x^P(X< x) 


Proprietes : (i) F est croissante 

(ii) F est continue a droite 

(lll) F(x) = 1, lim r 


F(x) = 0 


B.2 Variable aleatoire reelle (v.a.r): Loi 


Variable discrete Variable continue 

F est une fonction en escalier, continue F est une fonction continue 
a droite 





F\x) = f{x) 

f(x)= z p x (y) 

y<x,yeE A 


F{x ) = \—oof(t)dt = Aire sous la courbe de la densite avant x 

P(a< X <b) = F(b)-F(a) 


P(a< X <b) = P(a< X <b) = F(b ) - F(a ) = f(x)dx 

P(X >x) = l -F(x) 


P(X > x) = P(X > x) = 1 - F(x) = j%°° f(t)dt 


B.2 Variable aleatoire reelle (v.a.r): Loi 



B.2 Variable aleatoire reelle (v.a.r): Loi 


Exemple 2 : On fait l’experience E : 
« on lance 2 pieces de monnaie 
regulieres ». Soit X le nombre de 
« P » obtenu . 


-Xf 

O 

1 

2 

Pi 

1/4 

1/2 

1/4 


Li 



• Exemple 3 : E: lancer de la mine de 
crayon. X= abscisse 
f(x)dx=P[x<X<x+dx]=P({ca=(t,u), 
x<t<dx, 0<u<L})=dx*L/l *L si 
0<=x<=l, o sinon. Doncf(x)=i/l si 
0<=x<=l, O sinon. On reconnait : 



X~l/[ 0,/] 


1 


B.3 Variable aleatoire reelle (v.a.r) 
moments 

Esperance d’une v.a.r.d. Esperance d’une v.a.r.c. 

E(X) = jxf(x)dx 

R 

Esperance de Y=g(X), X v.a.r.d. Esperance de Y=g(X), X v.a 

E(Y) = Y J g(x) Px (x) 


Proprietes : 

E(a) = a 
E(aX) = aE(X) 

E(aX + bY) = aE(X) + bE(Y) 

E(XY) = E(X)E(Y)siX etY v.a. independantes 


E(Y) = | g(x)f (x)dx 

R 


E ( x ) = 'Z, x Px ( x ) 

xeE 


Rq : Uesperance peut ne pas exister 


B.3 Variable aleatoire reelle (v.a.r) 
moments 


V Definitions 


> Variance de X 


V{X) = a 1 x =E[{X-E{X)y) 


> Ecart-type de X 




V Proprietes : 

> Theoreme de Koenig : | V{X) = E{X 2 )-{E{X)f\ 


V(X+a) = V(X) 
V(aX+b) = a 2 V(X) 


V(X)>0 

<J X >0 

V(X) = 0 <^X=cste p.s. 




> Autres 


B.3 Variable aleatoire reelle (v.a.r): 
moments 


V Moment centre d’ordre k : 


(ly = 0,// 2 =Var(X) 


J U t =E((X-E(X))‘) 


Pour une loi symetrique : 


fhk± 1=0 v^o 


V Moment non centre d’ordre k : 

m l =E(X) 


w t = E(X*) 


Coefficient d’asymetrie (skewness) Coefficient d’aplatissement (kurtosis) 



72 <7 4 

y-fh, 

7 <T 3 




B.3 Variable aleatoire reelle (v.a.r): 
moments 


V Quelques inegalites classiques 

> Inegalite de markov 


\/k > 0, P(l X\>k)< 


E ( I X I) 


> Inegalite de Bienayme Tchebychev 

> Inegalite de Jensen; soit g convexe 


\/k >0, P(\X-E(X)\>k)< 


V(X) 

k 2 


g(E(X))<E(g(X)) 


> Inegalite de Holder E ( I XY I) < E ( I V I p f p E{\ Y \ q ) 


\l/q 


> CP : Inegalite de Cauchy-Schwarz 


E(\XY\)<- s [e(X^)E(Y T ) , E(\X \)<y[E(X*) 


B.4 Variable aleatoire reelle (v.a.r): 
couples de v.a.r. 

V Definition : On appelle couple de variables aleatoires, deux variables aleatoires 
X et Y definies sur le meme univers (issues de la meme experience) a valeurs 
respectivement dans E et F. 

V Loi jointe d’un couple de variables aleatoires : 



B.4 Variable aleatoire reelle (v.a.r): 
couples de v.a.r. 


Y Lois conditionnelles de Y sachant X=x 


> Cas discret 

tuv iv \ P(X=x,Y = y ) 

P(Y = y/X=x) = — Vy e F 

P(X=x) 

> Cas continu 

f(ylx>= Vye R 

fix) 



B.4 Variable aleatoire reelle (v.a.r): 
couples de v.a.r. 


v' Esperance conditionnelle 

L’esperance conditionnelle E(Y/X) est une variable aleatoire de meme 
loi que X, dont les realisations possibles sont les valeurs {E(Y/ X = x)} x&E 
, valeurs des esperances des lois conditionnelles de Y/X=x 


> Cas discret 


E(Y/X = x) = Ya y p ( Y = y /x = x),Vxe E 

yeF 


> 


ECY/X) 

E(Y/X=xl) 


E(Y/X=xn) 

P(E(Y/X)=x) 

P(X=xl) 


P(X=xn) 


Cas continu 


E(Y/X=x) = j R yf(y/X=x)dy 


prise avec la densite f(x). 


> Propriete : esperance de l’esperance conditionnelle | E(E(Y/X)) = E(Y)\ 


B.4 Variable aleatoire reelle (v.a.r): 
couples de v.a.r. 

Z Covariance entre X et Y 

Cov(X,Y) = E((X-E(X))(X-E<X)) 


Z Proprietes 

> Theoreme de Koenig generalise 


Cov(X,Y) = E(XY)-E(X)E(Y) 


> Autres Cov(X,Y) = Cov(Y,X) 

Cov(aX +bY,Z) = aCov(X , Z) + bCov(Y , Z) 

Cov(X ,aY + bZ) = aCov(X , Y) + bCov(X , Z) 

Cov(a,Y) = Cov(Y,a) = 0 
V(aX+Z?F) = a 2 y(X) + /? 2 y(F) + 2aZ?C^v(X,F) 


B.4 Variable aleatoire reelle (v.a.r) 
couples de v.a.r. 


V Vecteur esperance du couple (X, Y) 


M(X,Y) 



V Matrice de variance-covariance 


Z(X,F) 


' V(X) Cov(X,Y)^ 
k Cov(X,Y ) V(Y) , 


Elle est symetrique, semi-definie positive 


B.4 Variable aleatoire reelle (v.a.r) 
couples de v.a.r. 


V Correlation entre X et Y 


pi.X,Y) 


CovjXJ) 


|/7(X,F) = Cov(X*,y*)| 


Ou X* et Y* sont les variables centrees-reduites associees a X et Y. 


V Proprietes 


-\<p{X,Y)<\ 
\p(.X,Y)\ = \ 


D’autant plus proche de 1 en valeur absolu que le lien lineaire est fort 
entre X et Y. 

Lien lineaire parfait : Y=aX+b 


n( X Y") = 0 Absence de lien lineaire (pas forcement independance entre X et Y) 

* ’ bcov(x,r) = o | “)=^™>l 

1 1 E(XY) = E(X)E(Y ) 


B.5 Variable aleatoire reelle (v.a.r): 
independance 


V Definition : On dit que deux variables aleatoires X et Y a valeurs dans (E,£>i) et 
(F,£> 2 )sont independantes si et seulement si pour tout (Bi,B2) e (Bi,B 2), les 
evenements {Xe 61} et {Y e £>2} sont independants. 


> Cas discret 


V(jc, y)e Ex F, P(X =x,Y = y) = P(X = x)P(Y = y ) 


> Cas continu |V(x,y)e R 2 , f (x, y) = f (x)f (y) 


la loi jointe est egale au produit des lois marginales 

V Definition equivalentes ExF , P(Y = y/X = x) = P(Y = y)| 

|V(iry)e j?*,/(y/j;)=7O0| 

V Propriete : Deux variables aleatoires independantes sont non correlees, la 
reciproque etant fausse (deux variables n’ayant pas de lien du tout n’ont en 
particulier pas de lien lineaire, l’inverse etant faux) 


B.5 Variable aleatoire reelle (v.a.r) 
independance 


Proprietes : 


E(XY) = E(X)E(Y) 


X_L Y<*\ cov(X,F) = r(X,Y) = 0 


V(X+F) = V(X)+V(Y) 


